במעשה אשת פוטיפר שניסתה לתפוס בבגדי יוסף חז"ל מסבירים שיוסף שאב כוחות נפש מאביו: "באותה שעה באה דיוקנו של אביו ונראתה לו בחלון, אמר לו: יוסף, עתידין אחיך, שיכתבו על אבני אפוד ואתה ביניהם, רצונך שימחה שמך מביניהם ותקרא רועה זונות?" (סוטה לו ע"ב). במדרש אחר הניסוח שונה במקצת: "שראה דמות דיוקנו של אביו והפיל … המשך לקרוא דמותם של אבא ואמא